﻿Curs%1%% Tehnologii%de%nivel%înalt%aplicate% textului! Dan!Cristea! Cât de departe poate merge mașina în înțelegerea limbajului? Capacitatea de a utiliza limbajul natural • Proba supremă: “înțelegerea” textelor => capacitatea de a reacționa corect la mesajul codificat în text – niveluri de analiză: • lexical • morfologic • sintactic • semantic • discurs • pragmatic E8chetare!morfologică! drd !Radu!Simionescu! Detectarea!grupurilor!nominale! drd !Radu!Simionescu! Parsarea!sintac8că! drd !Radu!Simionescu! Concordances (KWIC – Key Word In Context) … Search for complex syntactic constructs in large corpora [drukola/base=permite]![drukola/s=syntrel:c i ]! CyRo – build a technology that interprets old Cyrillic Romanian • Train OCR classifiers to decode printed, semi-uncial and cursive Cyrillic Romanian documents • Ambitious goals of a mixt consortium – library curators – paleolinguists – image processing Google Translate • Example based translation Train a syntactic parser on a collection of syntactic trees (treebank) Exemplu!de!adnotare!sintac8că! Generate student exam tests from medical manuals Representing medical knowledge in Protégé QuoVadis – a corpus of book characters and their relations • H !Sienkiewicz's!Quo$Vadis!! • A!corpus!and!a!technology! – The!corpus:!developed!with! master!students!in!CL:!! • en88es!of!type!person!and!god!! • rela8ons:!coreference,!kinship,! affec8ve,!social! – The!technology:!recognising! en88es!and!rela8ons! I T A K E Unconference, 7 June 2018 A!corpus!seman8c!en88es!and! rela8ons! • Type!of!en88es:! – persons! – gods! – groups!of!persons!and!gods! – body!parts!!! • Seman8c! rela8ons! among! en88es! of! these! types! 41 Rela8ons! • Anaphoric%rela8ons:%co-referen:al;% • Non-anaphoric%rela8ons:! – kinship;$$ – affec2ve;$ – social ! 42 Anaphoric!rela8ons! • coref!! • coref-interpret$ • member-of,!has-as-member$(inverse)! • isa,$class-of!(inverse)!! • part-of,!has-as-part!(inverse)$ • subgroup-of,!has-as-subgroup!(inverse)! • has-name,!name-of$(inverse)! Example:!! [Lygia]1$was$unable$to$answer,$for$weeping$seized$[her]2$anew $Acte$gathered$ 12 [the$maiden]3$to$her$bosom,$and$strove$to$calm$[her]4!excitement $$ 34 $ $ !coref! ;! !coref-interpret! ;! !coref! ! 43 Kinship!rela8ons! • parent-of!! • child-of!(inverse!of!parent-of)! • grandparent-of!and!grandchild-of!(inverse)! • sibling!(symmetrical)! • ant-uncle-of,!nephew-of!(inverse!rela8on)! • cousin-of!(symmetrical)! • spouse-of!(symmetrical)! • unknown! Example:!! "Pardon$ me,$ Lygia $ For$ me$thou$ art![ ! [of$a$king]2]1!and![ ![of$Plau2us]4]3 “! ! ! !child-of! ;! !child-of! ! 44 Social!rela8ons! • superior-of! • inferior-of$ • in$coopera2on-with! • $colleague-of! • in$compe22on-with! • $opposite-to! Example:!! [Petronius]1…but$ to$ [his]2$ misfortune![he]3! ! 1 2 3 [Cæsar$himself]4,!hence$[he]5!roused$[his]6!jealousy !! 4 5 6 ! ! ! !in!compe88on-with! ;! ! !!!!!!!!!!! !coref! ;! !coref! ;! !coref! ! 45 Affec8ve!rela8ons! • love$ • loved-by$ • hate$ • hated$by$ • upset$ • friendship! • worship$ Example:!! Vinicius$ entered$ Lygia's$ dungeon$ and$ remained$ there$ 2ll$ daylight…Both$ changed$by$degrees$into$sad$souls$ $with![each]1![other]2 !! 12 ! ! !! !rec-love! ! 46 General!sta8s8cs!over!the!corpus! 7,281!sentences! 146,822!tokens,!punctua8on!included! 171,029!tokens!summed!up!under!all!rela8ons! 24,636!en8ty!men8ons! 22,301!referen8al!rela8ons! 755!AKS!rela8ons!(Affec8ve!+!Kinship!+!Social)! 752!triggers! 62 Example:!affec8ve!rela8ons!love!and!worship! 63 Example:!affec8ve!rela8ons!fear-of!and!hate! 64 Vinicius'!links!with!other!characters! 65 Seman8c!rela8ons!involving!Vinicius! 66 Tash Aw: Map of the invisible world In books time does not flow linearly on… I T A K E Unconference, 7 June 2018 Timpul în texte adesea nu curge liniar În bucătărie, așteptând ca apa să fiarbă, Margaret se întreba cum de a sărit ea atât de natural să-l îmbrățișeze pe Adam Nu putea să-și dea seama ce a făcut-o să se simtă atât de fericită să-l vadă din nou ! Tash!Aw:!Harta$lumii$invisibile$ Segmentare Margaret: momentul povestirii, în bucătărie, întrebându-se Margaret & Adam: în trecut, undeva, Margaret se simte fericită Margaret & Adam: în trecut, undeva, Margaret îl îmbrățișează pe Adam Margaret: momentul povestirii, în bucătărie, nu înțelege ceva ò [În bucătărie, așteptând ca apa să fiarbă, Margaret se întreba cum de] ò [a sărit ea atât de natural să-l îmbrățișeze pe Adam ] ò [Nu putea să-și dea seama ce a făcut-o] ò [să se simtă atât de fericită să-l vadă din nou ] Percepția noastră asupra timpului în romane Tash Aw: Harta lumii invisibile – o privire “ochi de pas ă re” Să ne imaginăm… • …!că o tehnologie TYM înregistrează TT-uri ale persoanelor care au un impact ridicat asupra evoluțiilor politice dintr-o țară – de exemplu, prin citirea și interpretarea știrilor zilnice • atunci – paginile istoriei ar putea fi redactate automat de către un agent inteligent capabil de sinteză